RESUMO O novo modelo formativo de ensino superior pretende dotar os estudantes das competências adequadas. A competência de comunicação oral é uma das mais importantes para a empregabilidade dos graduados. Há vários critérios utilizados na avaliação dessa competência, e por isso é importante uni-los. Nessa perspectiva, é importante o desenvolvimento de rubricas validadas. As rubricas permitem uma avaliação da qualidade das contribuições dos estudantes, assim como os orientam no seu desempenho ao especificar os fatores que serão avaliados. Para alcançar o objetivo principal deste trabalho, é descrito o processo de elaboração de uma rubrica e analisadas a validez e a confiabilidade de sua implantação. Para isso se realiza uma experiência na disciplina organização industrial e administração de empresas, do curso de graduação em engenharia industrial. Os resultados revelam que a rubrica desenvolvida é uma ferramenta válida e confiável para avaliar a competência de comunicação oral.

ABSTRACT The new university educational model fosters the equipping of students with the right competences. Oral communication competence is one of the most important ones demanded for the employability of university graduates. There are several evaluation criteria to assess this competence, so it is important to unify them. Therefore, it is crucial to develop validated scoring rubrics. Rubrics allow assessing the quality of students’ contributions as well as guiding their performance by specifying the factors that will be evaluated. To achieve the main objective of this paper, we describe the development process of a scoring rubric and analyze its validity and reliability based on its implementation. Therefore, we undertake a practical experiment in the subject, industrial organization and business administration in an industrial engineering degree course. Consequently, our findings revealed that the scoring rubric is a valid and reliable tool to assess oral communication competence.

RESUMEN El nuevo modelo formativo de enseñanza universitaria promueve dotar a los estudiantes de las competencias adecuadas. La competencia de comunicación oral es una de las más importantes para la empleabilidad de los titulados universitarios. Hay varios criterios para evaluar esta competencia, por lo que es importante unificarlos. Por tanto, es crucial desarrollar rúbricas validadas. Las rúbricas permiten valorar la calidad de las contribuciones de los estudiantes, así como orientarlos en su desempeño al especificar los factores que serán evaluados. Para alcanzar el objetivo principal de este trabajo se describe el proceso de elaboración de una rúbrica y se analiza su validez y fiabilidad mediante su implementación. Para ello se lleva a cabo una experiencia en la asignatura “organización industrial y administración de empresas” de la titulación de ingeniería industrial. Como consecuencia, los resultados revelan que la rúbrica diseñada es una herramienta válida y fiable para evaluar la competencia de comunicación oral.

Valorar de manera realista y crítica las propias capacidades es clave para una adaptación continua a las cambiantes condiciones del mercado de trabajo. El sistema universitario debe preparar a los futuros ingenieros para que puedan juzgar su propio trabajo de manera precisa, reduciendo los sesgos como la auto-benevolencia. Este trabajo analiza, con una muestra de estudiantes de Ingeniería Industrial, la precisión de la autoevaluación en presentaciones orales, utilizando una rúbrica. Los resultados, fruto de varias pruebas estadísticas, indican que los estudiantes son buenos valoradores del trabajo de otros, pero benevolentes consigo mismos. Además, los hombres se autoevalúan de manera significativamente superior que las mujeres. Finalmente, las autoevaluaciones tienden a compensar las valoraciones efectuadas por otros valoradores, fundamentalmente en el caso de los estudiantes peor considerados por los profesores. Estos resultados sugieren la necesidad de incluir actividades de autoevaluación en un número creciente que mejoren el desempeño de los estudiantes.

Assess one's own abilities realistically and critically is the key for a continuous adaptation to the changing labor market conditions. The university system must train the future engineers to rate their own performance accurately, reducing biases as self-benevolence. This paper analyzes, with a sample of students of Industrial Engineering, the accuracy of self-assessment in oral presentations, using a scoring rubric. The results of several statistical tests indicate that students are good assessors of others work, but benevolent with their own work. In addition, men evaluate themselves significantly higher than women do. Finally, self-assessment tend to compensate for others assessments, mainly in the case of students considered worse by teachers. These results point to the need of including self-assessment activities in an increasing number to improve students' performance.